技術 Day 16: 用 EMR 將資料一次性遷移到 Aurora PostgreSQL 的完整紀錄(中)

問題二：DynamoDB 的 API 限流（Throttling） DynamoDB 對讀取吞吐量有嚴格的預設限制： 每張表的預設上限：40,000 RCU...

技術 Day 15: 用 EMR 將資料一次性遷移到 Aurora PostgreSQL 的完整紀錄(上)

廣告點擊系統 API 最初採用 DynamoDB 儲存廣告點擊（ad click）事件。DynamoDB 的無伺服器特性讓初期開發非常快速，然而，當業務成長、下...

技術 Day 11: 批次寫入資料 - DynamoDB

DynamoDB 的部分，要做 batch 的話，需要把 put_item 改用 batch_write_item ，才能把多筆資料一起塞到 table 裡。...

技術 Day 9: 批次寫入資料

在處理高流量的事件驅動架構時，如何有效地寫入資料到 DynamoDB 和 S3 是一個常見的挑戰。這幾天將分享如何通過批次處理優化，大幅降低 AWS 成本並提升...

技術 Day 5: 使用 S3 儲存數據（上）

在昨天的文章，只用 DynamoDB 作為儲存數據，如果資料量很大，且需要定時拉資料做分析，就不適合直接使用 DynamoDB 的資料，因為資料量越大，從 Dy...

技術 Day 4: 系統需求和規格與架構設計（下）

架構設計 DynamoDB Table 以 ad_id 為 Partition Key ， click_id 為 Sort Key ，可以藉由 ad_id 分析...

技術 Day 27 資料庫遷移：DynamoDB Streams 串接 S3 x Athena 匯出與查詢

一、前言 在會員系統或應用服務中，DynamoDB 通常扮演交易與即時讀寫的角色，但若需要進行歷史數據查詢、商業分析或批次報表，DynamoDB 並不適合直接...

技術 【Day 21】 會員功能擴充 - 設定寄信重設密碼功能 (下)

前言 使用者註冊完後忘記密碼，需要進行重設的功能開發。 設計 Verify-vlog-email Lambda Function / verify-email...

技術 Day 20: 使用AWS SNS設計文章發佈通知—如何搭配 API Gateway 和 Lambda 設計系統

昨天釐清需求和設計完架構之後，就可以拿著需求請 AI 幫忙寫 CloudFormation 的 template ，接著透過 CloudFormation 把...

技術 Day 16 資料庫效能優化：DynamoDB GSI/LSI 與 Query / Scan 應用

一、前言 DynamoDB 雖然是 Serverless 架構中高效能、低延遲的 NoSQL 資料庫，但若僅依賴單一主鍵（Partition Key + So...

技術 Day 14 會員資料同步：Cognito x Lambda x DynamoDB Profile 管理

# 一、前言 Cognito User Pool 本質上是身份與驗證服務，而非完整會員資料庫。如果僅依靠 Cognito，無法方便地做會員資料的彙整、查詢與後續...

技術 Day 12: DynamoDB IAM 實戰 - Attribute Level 權限設計和踩坑實錄

除了鎖 Table 之外，如果今天我們想封鎖特定 Attribute ，避免一些機敏資料不小心外洩，要怎麼做呢？也許可以先在 Condition 加上 ForA...

技術 Day 11: DynamoDB IAM 實戰 - Table Level 權限設計和踩坑實錄

如果今天有多個團隊在同一個 AWS 帳號上開發不同系統，並且在 DynamoDB 上建置多張 Table ，為了要避免誤刪 Table ，或者不小心修改到其他團...

技術 AWS-使用 AWS Lambda 和 API Gateway S3 建立商品清單管理系統

架構圖 該系統的架構是由「前端網頁」、AWS - 「API Gateway」、「Lambda」、「S3」、「DynamoDB」組成，架構圖如下。 功能說...

技術 Day21 Drive Service - 取出OAuth Token操作Drive

今天一開始我們先來調整一下我們之前對Expiry宣告的類型，昨天仔細看發現oauth官方的Token(oauth2.Token)結構如下: type Token...

技術 Day20 Login Service - OAuth Token存到Dynamodb

開始之前我們調整一下之前在adapter\google\oauth.go的OAuthLoginURL()，把原本寫死的第一個參數”state-token”改...

技術 實作 AWS 常用服務之 Terraform 模組系列 - DynamoDB 篇

AWS DynamoDB 模組實作 本篇是實作常用的 AWS DynamoDB 服務之 Terraform 模組，並且會使用到 YAML 資料結構來定義模組的內...